home *** CD-ROM | disk | FTP | other *** search
/ Chip 2007 January, February, March & April / Chip-Cover-CD-2007-02.iso / Pakiet bezpieczenstwa / mini Pentoo LiveCD 2006.1 / mpentoo-2006.1.iso / livecd.squashfs / usr / bin / intltool-update < prev    next >
Text File  |  2005-10-18  |  27KB  |  1,066 lines
  1. #!/usr/bin/perl -w
  2. # -*- Mode: perl; indent-tabs-mode: nil; c-basic-offset: 4  -*-
  3.  
  4. #
  5. #  The Intltool Message Updater
  6. #
  7. #  Copyright (C) 2000-2003 Free Software Foundation.
  8. #
  9. #  Intltool is free software; you can redistribute it and/or
  10. #  modify it under the terms of the GNU General Public License 
  11. #  version 2 published by the Free Software Foundation.
  12. #
  13. #  Intltool is distributed in the hope that it will be useful,
  14. #  but WITHOUT ANY WARRANTY; without even the implied warranty of
  15. #  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  16. #  General Public License for more details.
  17. #
  18. #  You should have received a copy of the GNU General Public License
  19. #  along with this program; if not, write to the Free Software
  20. #  Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
  21. #
  22. #  As a special exception to the GNU General Public License, if you
  23. #  distribute this file as part of a program that contains a
  24. #  configuration script generated by Autoconf, you may include it under
  25. #  the same distribution terms that you use for the rest of that program.
  26. #
  27. #  Authors: Kenneth Christiansen <kenneth@gnu.org>
  28. #           Maciej Stachowiak
  29. #           Darin Adler <darin@bentspoon.com>
  30.  
  31. ## Release information
  32. my $PROGRAM = "intltool-update";
  33. my $VERSION = "0.34.1";
  34. my $PACKAGE = "intltool";
  35.  
  36. ## Loaded modules
  37. use strict;
  38. use Getopt::Long;
  39. use Cwd;
  40. use File::Copy;
  41. use File::Find;
  42.  
  43. ## Scalars used by the option stuff
  44. my $HELP_ARG        = 0;
  45. my $VERSION_ARG    = 0;
  46. my $DIST_ARG       = 0;
  47. my $POT_ARG       = 0;
  48. my $HEADERS_ARG    = 0;
  49. my $MAINTAIN_ARG   = 0;
  50. my $REPORT_ARG     = 0;
  51. my $VERBOSE       = 0;
  52. my $GETTEXT_PACKAGE = "";
  53. my $OUTPUT_FILE    = "";
  54.  
  55. my @languages;
  56. my %varhash = ();
  57. my %po_files_by_lang = ();
  58.  
  59. # Regular expressions to categorize file types.
  60. # FIXME: Please check if the following is correct
  61.  
  62. my $xml_support =
  63. "xml(?:\\.in)*|".    # http://www.w3.org/XML/ (Note: .in is not required)
  64. "ui|".            # Bonobo specific - User Interface desc. files
  65. "lang|".        # ?
  66. "glade2?(?:\\.in)*|".    # Glade specific - User Interface desc. files (Note: .in is not required)
  67. "scm(?:\\.in)*|".    # ? (Note: .in is not required)
  68. "oaf(?:\\.in)+|".    # DEPRECATED: Replaces by Bonobo .server files 
  69. "etspec|".        # ?
  70. "server(?:\\.in)+|".    # Bonobo specific
  71. "sheet(?:\\.in)+|".    # ?
  72. "schemas(?:\\.in)+|".    # GConf specific
  73. "pong(?:\\.in)+|".    # DEPRECATED: PONG is not used [by GNOME] any longer.
  74. "kbd(?:\\.in)+";    # GOK specific. 
  75.  
  76. my $ini_support =
  77. "icon(?:\\.in)+|".    # http://www.freedesktop.org/Standards/icon-theme-spec
  78. "desktop(?:\\.in)+|".    # http://www.freedesktop.org/Standards/menu-spec
  79. "caves(?:\\.in)+|".    # GNOME Games specific
  80. "directory(?:\\.in)+|".    # http://www.freedesktop.org/Standards/menu-spec
  81. "soundlist(?:\\.in)+|".    # GNOME specific
  82. "keys(?:\\.in)+|".    # GNOME Mime database specific
  83. "theme(?:\\.in)+";    # http://www.freedesktop.org/Standards/icon-theme-spec
  84.  
  85. my $buildin_gettext_support = 
  86. "c|y|cs|cc|cpp|c\\+\\+|h|hh|gob|py";
  87.  
  88. ## Always flush buffer when printing
  89. $| = 1;
  90.  
  91. ## Sometimes the source tree will be rooted somewhere else.
  92. my $SRCDIR = ".";
  93. my $POTFILES_in;
  94.  
  95. $SRCDIR = $ENV{"srcdir"} if $ENV{"srcdir"};
  96. $POTFILES_in = "<$SRCDIR/POTFILES.in";
  97.  
  98. my $devnull = ($^O eq 'MSWin32' ? 'NUL:' : '/dev/null');
  99.  
  100. ## Handle options
  101. GetOptions 
  102. (
  103.  "help"            => \$HELP_ARG,
  104.  "version"            => \$VERSION_ARG,
  105.  "dist|d"           => \$DIST_ARG,
  106.  "pot|p"           => \$POT_ARG,
  107.  "headers|s"           => \$HEADERS_ARG,
  108.  "maintain|m"           => \$MAINTAIN_ARG,
  109.  "report|r"           => \$REPORT_ARG,
  110.  "verbose|x"           => \$VERBOSE,
  111.  "gettext-package|g=s" => \$GETTEXT_PACKAGE,
  112.  "output-file|o=s"     => \$OUTPUT_FILE,
  113.  ) or &Console_WriteError_InvalidOption;
  114.  
  115. &Console_Write_IntltoolHelp if $HELP_ARG;
  116. &Console_Write_IntltoolVersion if $VERSION_ARG;
  117.  
  118. my $arg_count = ($DIST_ARG > 0)
  119.     + ($POT_ARG > 0)
  120.     + ($HEADERS_ARG > 0)
  121.     + ($MAINTAIN_ARG > 0)
  122.     + ($REPORT_ARG > 0);
  123.  
  124. &Console_Write_IntltoolHelp if $arg_count > 1;
  125.  
  126. # --version and --help don't require a module name
  127. my $MODULE = $GETTEXT_PACKAGE || &FindPackageName;
  128.  
  129. if ($POT_ARG)
  130. {
  131.     &GenerateHeaders;
  132.     &GeneratePOTemplate;
  133. }
  134. elsif ($HEADERS_ARG)
  135. {
  136.     &GenerateHeaders;
  137. }
  138. elsif ($MAINTAIN_ARG)
  139. {
  140.     &FindLeftoutFiles;
  141. }
  142. elsif ($REPORT_ARG)
  143. {
  144.     &GenerateHeaders;
  145.     &GeneratePOTemplate;
  146.     &Console_Write_CoverageReport;
  147. }
  148. elsif ((defined $ARGV[0]) && $ARGV[0] =~ /^[a-z]/)
  149. {
  150.     my $lang = $ARGV[0];
  151.  
  152.     ## Report error if the language file supplied
  153.     ## to the command line is non-existent
  154.     &Console_WriteError_NotExisting("$SRCDIR/$lang.po")
  155.         if ! -s "$SRCDIR/$lang.po";
  156.  
  157.     if (!$DIST_ARG)
  158.     {
  159.     print "Working, please wait..." if $VERBOSE;
  160.     &GenerateHeaders;
  161.     &GeneratePOTemplate;
  162.     }
  163.     &POFile_Update ($lang, $OUTPUT_FILE);
  164.     &Console_Write_TranslationStatus ($lang, $OUTPUT_FILE);
  165. } 
  166. else 
  167. {
  168.     &Console_Write_IntltoolHelp;
  169. }
  170.  
  171. exit;
  172.  
  173. #########
  174.  
  175. sub Console_Write_IntltoolVersion
  176. {
  177.     print <<_EOF_;
  178. ${PROGRAM} (${PACKAGE}) $VERSION
  179. Written by Kenneth Christiansen, Maciej Stachowiak, and Darin Adler.
  180.  
  181. Copyright (C) 2000-2003 Free Software Foundation, Inc.
  182. This is free software; see the source for copying conditions.  There is NO
  183. warranty; not even for MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.
  184. _EOF_
  185.     exit;
  186. }
  187.  
  188. sub Console_Write_IntltoolHelp
  189. {
  190.     print <<_EOF_;
  191. Usage: ${PROGRAM} [OPTION]... LANGCODE
  192. Updates PO template files and merge them with the translations.
  193.  
  194. Mode of operation (only one is allowed):
  195.   -p, --pot                   generate the PO template only
  196.   -s, --headers               generate the header files in POTFILES.in
  197.   -m, --maintain              search for left out files from POTFILES.in
  198.   -r, --report                display a status report for the module
  199.   -d, --dist                  merge LANGCODE.po with existing PO template
  200.  
  201. Extra options:
  202.   -g, --gettext-package=NAME  override PO template name, useful with --pot
  203.   -o, --output-file=FILE      write merged translation to FILE
  204.   -x, --verbose               display lots of feedback
  205.       --help                  display this help and exit
  206.       --version               output version information and exit
  207.  
  208. Examples of use:
  209. ${PROGRAM} --pot    just create a new PO template
  210. ${PROGRAM} xy       create new PO template and merge xy.po with it
  211.  
  212. Report bugs to http://bugzilla.gnome.org/ (product name "$PACKAGE")
  213. or send email to <xml-i18n-tools\@gnome.org>.
  214. _EOF_
  215.     exit;
  216. }
  217.  
  218. sub echo_n
  219. {
  220.     my $str = shift;
  221.     my $ret = `echo "$str"`;
  222.  
  223.     $ret =~ s/\n$//; # do we need the "s" flag?
  224.  
  225.     return $ret;
  226. }
  227.  
  228. sub POFile_DetermineType ($) 
  229. {
  230.    my $type = $_;
  231.    my $gettext_type;
  232.  
  233.    my $xml_regex     = "(?:" . $xml_support . ")";
  234.    my $ini_regex     = "(?:" . $ini_support . ")";
  235.    my $buildin_regex = "(?:" . $buildin_gettext_support . ")";
  236.  
  237.    if ($type =~ /\[type: gettext\/([^\]].*)]/) 
  238.    {
  239.     $gettext_type=$1;
  240.    }
  241.    elsif ($type =~ /schemas(\.in)+$/) 
  242.    {
  243.     $gettext_type="schemas";
  244.    }
  245.    elsif ($type =~ /glade2?(\.in)*$/) 
  246.    {
  247.        $gettext_type="glade";
  248.    }
  249.    elsif ($type =~ /scm(\.in)*$/) 
  250.    {
  251.        $gettext_type="scheme";
  252.    }
  253.    elsif ($type =~ /keys(\.in)+$/) 
  254.    {
  255.        $gettext_type="keys";
  256.    }
  257.  
  258.    # bucket types
  259.  
  260.    elsif ($type =~ /$xml_regex$/) 
  261.    {
  262.        $gettext_type="xml";
  263.    }
  264.    elsif ($type =~ /$ini_regex$/) 
  265.    { 
  266.        $gettext_type="ini";
  267.    }
  268.    elsif ($type =~ /$buildin_regex$/) 
  269.    {
  270.        $gettext_type="buildin";
  271.    }
  272.    else
  273.    { 
  274.        $gettext_type="unknown"; 
  275.    }
  276.  
  277.    return "gettext\/$gettext_type";
  278. }
  279.  
  280. sub TextFile_DetermineEncoding ($) 
  281. {
  282.     my $gettext_code="ASCII"; # All files are ASCII by default
  283.     my $filetype=`file $_ | cut -d ' ' -f 2`;
  284.  
  285.     if ($? eq "0")
  286.     {
  287.     if ($filetype =~ /^(ISO|UTF)/)
  288.     {
  289.         chomp ($gettext_code = $filetype);
  290.     }
  291.     elsif ($filetype =~ /^XML/)
  292.     {
  293.         $gettext_code="UTF-8"; # We asume that .glade and other .xml files are UTF-8
  294.     }
  295.     }
  296.  
  297.     return $gettext_code;
  298. }
  299.  
  300. sub isNotValidMissing
  301. {
  302.     my ($file) = @_;
  303.  
  304.     return if $file =~ /^\{arch\}\/.*$/;
  305.     return if $file =~ /^$varhash{"PACKAGE"}-$varhash{"VERSION"}\/.*$/;
  306. }
  307.  
  308. sub FindLeftoutFiles
  309. {
  310.     my (@buf_i18n_plain,
  311.     @buf_i18n_xml,
  312.     @buf_i18n_xml_unmarked,
  313.     @buf_i18n_ini,
  314.     @buf_potfiles,
  315.     @buf_potfiles_ignore,
  316.     @buf_allfiles,
  317.     @buf_allfiles_sorted,
  318.     @buf_potfiles_sorted
  319.     );
  320.  
  321.     ## Search and find all translatable files
  322.     find sub { 
  323.     push @buf_i18n_plain,        "$File::Find::name" if /\.($buildin_gettext_support)$/;
  324.     push @buf_i18n_xml,          "$File::Find::name" if /\.($xml_support)$/;
  325.     push @buf_i18n_ini,          "$File::Find::name" if /\.($ini_support)$/;
  326.     push @buf_i18n_xml_unmarked, "$File::Find::name" if /\.(schemas(\.in)+)$/;
  327.     }, "..";
  328.  
  329.  
  330.     open POTFILES, $POTFILES_in or die "$PROGRAM:  there's no POTFILES.in!\n";
  331.     @buf_potfiles = grep !/^(#|\s*$)/, <POTFILES>;
  332.     close POTFILES;
  333.  
  334.     foreach (@buf_potfiles) {
  335.     s/^\[.*]\s*//;
  336.     }
  337.  
  338.     print "Searching for missing translatable files...\n" if $VERBOSE;
  339.  
  340.     ## Check if we should ignore some found files, when
  341.     ## comparing with POTFILES.in
  342.     foreach my $ignore ("POTFILES.skip", "POTFILES.ignore")
  343.     {
  344.     (-s $ignore) or next;
  345.  
  346.     if ("$ignore" eq "POTFILES.ignore")
  347.     {
  348.         print "The usage of POTFILES.ignore is deprecated. Please consider moving the\n".
  349.           "content of this file to POTFILES.skip.\n";
  350.     }
  351.  
  352.     print "Found $ignore: Ignoring files...\n" if $VERBOSE;
  353.     open FILE, "<$ignore" or die "ERROR: Failed to open $ignore!\n";
  354.         
  355.     while (<FILE>)
  356.     {
  357.         push @buf_potfiles_ignore, $_ unless /^(#|\s*$)/;
  358.     }
  359.     close FILE;
  360.  
  361.     @buf_potfiles = (@buf_potfiles_ignore, @buf_potfiles);
  362.     }
  363.  
  364.     foreach my $file (@buf_i18n_plain)
  365.     {
  366.     my $in_comment = 0;
  367.     my $in_macro = 0;
  368.  
  369.     open FILE, "<$file";
  370.     while (<FILE>)
  371.     {
  372.         # Handle continued multi-line comment.
  373.         if ($in_comment)
  374.         {
  375.         next unless s-.*\*/--;
  376.         $in_comment = 0;
  377.         }
  378.  
  379.         # Handle continued macro.
  380.         if ($in_macro)
  381.         {
  382.         $in_macro = 0 unless /\\$/;
  383.         next;
  384.         }
  385.  
  386.         # Handle start of macro (or any preprocessor directive).
  387.         if (/^\s*\#/)
  388.         {
  389.         $in_macro = 1 if /^([^\\]|\\.)*\\$/;
  390.         next;
  391.         }
  392.  
  393.         # Handle comments and quoted text.
  394.         while (m-(/\*|//|\'|\")-) # \' and \" keep emacs perl mode happy
  395.         {
  396.         my $match = $1;
  397.         if ($match eq "/*")
  398.         {
  399.             if (!s-/\*.*?\*/--)
  400.             {
  401.             s-/\*.*--;
  402.             $in_comment = 1;
  403.             }
  404.         }
  405.         elsif ($match eq "//")
  406.         {
  407.             s-//.*--;
  408.         }
  409.         else # ' or "
  410.         {
  411.             if (!s-$match([^\\]|\\.)*?$match-QUOTEDTEXT-)
  412.             {
  413.             warn "mismatched quotes at line $. in $file\n";
  414.             s-$match.*--;
  415.             }
  416.         }
  417.         }        
  418.  
  419.         if (/\.GetString ?\(QUOTEDTEXT/)
  420.         {
  421.                 if (defined isNotValidMissing (unpack("x3 A*", $file))) {
  422.                     ## Remove the first 3 chars and add newline
  423.                     push @buf_allfiles, unpack("x3 A*", $file) . "\n";
  424.                 }
  425.         last;
  426.         }
  427.  
  428.         if (/_\(QUOTEDTEXT/)
  429.         {
  430.                 if (defined isNotValidMissing (unpack("x3 A*", $file))) {
  431.                     ## Remove the first 3 chars and add newline
  432.                     push @buf_allfiles, unpack("x3 A*", $file) . "\n";
  433.                 }
  434.         last;
  435.         }
  436.     }
  437.     close FILE;
  438.     }
  439.  
  440.     foreach my $file (@buf_i18n_xml) 
  441.     {
  442.     open FILE, "<$file";
  443.     
  444.     while (<FILE>) 
  445.     {
  446.         # FIXME: share the pattern matching code with intltool-extract
  447.         if (/\s_[-A-Za-z0-9._:]+\s*=\s*\"([^"]+)\"/ || /<_[^>]+>/ || /translatable=\"yes\"/)
  448.         {
  449.                 if (defined isNotValidMissing (unpack("x3 A*", $file))) {
  450.                     push @buf_allfiles, unpack("x3 A*", $file) . "\n";
  451.                 }
  452.         last;
  453.         }
  454.     }
  455.     close FILE;
  456.     }
  457.  
  458.     foreach my $file (@buf_i18n_ini)
  459.     {
  460.     open FILE, "<$file";
  461.     while (<FILE>) 
  462.     {
  463.         if (/_(.*)=/)
  464.         {
  465.                 if (defined isNotValidMissing (unpack("x3 A*", $file))) {
  466.                     push @buf_allfiles, unpack("x3 A*", $file) . "\n";
  467.                 }
  468.         last;
  469.         }
  470.     }
  471.     close FILE;
  472.     }
  473.  
  474.     foreach my $file (@buf_i18n_xml_unmarked)
  475.     {
  476.         if (defined isNotValidMissing (unpack("x3 A*", $file))) {
  477.             push @buf_allfiles, unpack("x3 A*", $file) . "\n";
  478.         }
  479.     }
  480.  
  481.  
  482.     @buf_allfiles_sorted = sort (@buf_allfiles);
  483.     @buf_potfiles_sorted = sort (@buf_potfiles);
  484.  
  485.     my %in2;
  486.     foreach (@buf_potfiles_sorted) 
  487.     {
  488.     $in2{$_} = 1;
  489.     }
  490.  
  491.     my @result;
  492.  
  493.     foreach (@buf_allfiles_sorted)
  494.     {
  495.     if (!exists($in2{$_}))
  496.     {
  497.         push @result, $_
  498.     }
  499.     }
  500.  
  501.     my @buf_potfiles_notexist;
  502.  
  503.     foreach (@buf_potfiles_sorted)
  504.     {
  505.     chomp (my $dummy = $_);
  506.     if ("$dummy" ne "" and ! -f "../$dummy")
  507.     {
  508.         push @buf_potfiles_notexist, $_;
  509.     }
  510.     }
  511.  
  512.     ## Save file with information about the files missing
  513.     ## if any, and give information about this procedure.
  514.     if (@result + @buf_potfiles_notexist > 0)
  515.     {
  516.     if (@result) 
  517.     {
  518.         print "\n" if $VERBOSE;
  519.         unlink "missing";
  520.         open OUT, ">missing";
  521.         print OUT @result;
  522.         close OUT;
  523.         warn "\e[1mThe following files contain translations and are currently not in use. Please\e[0m\n".
  524.              "\e[1mconsider adding these to the POTFILES.in file, located in the po/ directory.\e[0m\n\n";
  525.         print STDERR @result, "\n";
  526.         warn "If some of these files are left out on purpose then please add them to\n".
  527.          "POTFILES.skip instead of POTFILES.in. A file \e[1m'missing'\e[0m containing this list\n".
  528.          "of left out files has been written in the current directory.\n";
  529.     }
  530.     if (@buf_potfiles_notexist)
  531.     {
  532.         unlink "notexist";
  533.         open OUT, ">notexist";
  534.         print OUT @buf_potfiles_notexist;
  535.         close OUT;
  536.         warn "\n" if ($VERBOSE or @result);
  537.         warn "\e[1mThe following files do not exist anymore:\e[0m\n\n";
  538.         warn @buf_potfiles_notexist, "\n";
  539.         warn "Please remove them from POTFILES.in or POTFILES.skip. A file \e[1m'notexist'\e[0m\n".
  540.          "containing this list of absent files has been written in the current directory.\n";
  541.     }
  542.     }
  543.  
  544.     ## If there is nothing to complain about, notify the user
  545.     else {
  546.     print "\nAll files containing translations are present in POTFILES.in.\n" if $VERBOSE;
  547.     }
  548. }
  549.  
  550. sub Console_WriteError_InvalidOption
  551. {
  552.     ## Handle invalid arguments
  553.     print STDERR "Try `${PROGRAM} --help' for more information.\n";
  554.     exit 1;
  555. }
  556.  
  557. sub GenerateHeaders
  558. {
  559.     my $EXTRACT = "/usr/bin/intltool-extract";
  560.     chomp $EXTRACT;
  561.  
  562.     $EXTRACT = $ENV{"INTLTOOL_EXTRACT"} if $ENV{"INTLTOOL_EXTRACT"};
  563.  
  564.     ## Generate the .h header files, so we can allow glade and
  565.     ## xml translation support
  566.     if (! -x "$EXTRACT")
  567.     {
  568.     print STDERR "\n *** The intltool-extract script wasn't found!"
  569.          ."\n *** Without it, intltool-update can not generate files.\n";
  570.     exit;
  571.     }
  572.     else
  573.     {
  574.     open (FILE, $POTFILES_in) or die "$PROGRAM: POTFILES.in not found.\n";
  575.     
  576.     while (<FILE>) 
  577.     {
  578.        chomp;
  579.        next if /^\[\s*encoding/;
  580.  
  581.        ## Find xml files in POTFILES.in and generate the
  582.        ## files with help from the extract script
  583.  
  584.        my $gettext_type= &POFile_DetermineType ($1);
  585.  
  586.        if (/\.($xml_support|$ini_support)$/ || /^\[/)
  587.        {
  588.            s/^\[[^\[].*]\s*//;
  589.  
  590.            my $filename = "../$_";
  591.  
  592.            if ($VERBOSE)
  593.            {
  594.            system ($EXTRACT, "--update", "--srcdir=$SRCDIR",
  595.                "--type=$gettext_type", $filename);
  596.            } 
  597.            else 
  598.            {
  599.             system ($EXTRACT, "--update", "--type=$gettext_type", 
  600.                "--srcdir=$SRCDIR", "--quiet", $filename);
  601.            }
  602.        }
  603.        }
  604.        close FILE;
  605.    }
  606. }
  607.  
  608. #
  609. # Generate .pot file from POTFILES.in
  610. #
  611. sub GeneratePOTemplate
  612. {
  613.     my $XGETTEXT = $ENV{"XGETTEXT"} || "/usr/bin/xgettext";
  614.     my $XGETTEXT_ARGS = $ENV{"XGETTEXT_ARGS"} || '';
  615.     chomp $XGETTEXT;
  616.  
  617.     if (! -x $XGETTEXT)
  618.     {
  619.     print STDERR " *** xgettext is not found on this system!\n".
  620.              " *** Without it, intltool-update can not extract strings.\n";
  621.     exit;
  622.     }
  623.  
  624.     print "Building $MODULE.pot...\n" if $VERBOSE;
  625.  
  626.     open INFILE, $POTFILES_in;
  627.     unlink "POTFILES.in.temp";
  628.     open OUTFILE, ">POTFILES.in.temp" or die("Cannot open POTFILES.in.temp for writing");
  629.  
  630.     my $gettext_support_nonascii = 0;
  631.  
  632.     # checks for GNU gettext >= 0.12
  633.     my $dummy = `$XGETTEXT --version --from-code=UTF-8 >$devnull 2>$devnull`;
  634.     if ($? == 0)
  635.     {
  636.     $gettext_support_nonascii = 1;
  637.     }
  638.     else
  639.     {
  640.     # urge everybody to upgrade gettext
  641.     print STDERR "WARNING: This version of gettext does not support extracting non-ASCII\n".
  642.              "         strings. That means you should install a version of gettext\n".
  643.              "         that supports non-ASCII strings (such as GNU gettext >= 0.12),\n".
  644.              "         or have to let non-ASCII strings untranslated. (If there is any)\n";
  645.     }
  646.  
  647.     my $encoding = "ASCII";
  648.     my $forced_gettext_code;
  649.     my @temp_headers;
  650.     my $encoding_problem_is_reported = 0;
  651.  
  652.     while (<INFILE>) 
  653.     {
  654.     next if (/^#/ or /^\s*$/);
  655.  
  656.     chomp;
  657.  
  658.     my $gettext_code;
  659.  
  660.     if (/^\[\s*encoding:\s*(.*)\s*\]/)
  661.     {
  662.         $forced_gettext_code=$1;
  663.     }
  664.     elsif (/\.($xml_support|$ini_support)$/ || /^\[/)
  665.     {
  666.         s/^\[.*]\s*//;
  667.             print OUTFILE "../$_.h\n";
  668.         push @temp_headers, "../$_.h";
  669.         $gettext_code = &TextFile_DetermineEncoding ("../$_.h") if ($gettext_support_nonascii and not defined $forced_gettext_code);
  670.     } 
  671.     else 
  672.     {
  673.         if ($SRCDIR eq ".") {
  674.             print OUTFILE "../$_\n";
  675.         } else {
  676.             print OUTFILE "$SRCDIR/../$_\n";
  677.         }
  678.         $gettext_code = &TextFile_DetermineEncoding ("../$_") if ($gettext_support_nonascii and not defined $forced_gettext_code);
  679.     }
  680.  
  681.     next if (! $gettext_support_nonascii);
  682.  
  683.     if (defined $forced_gettext_code)
  684.     {
  685.         $encoding=$forced_gettext_code;
  686.     }
  687.     elsif (defined $gettext_code and "$encoding" ne "$gettext_code")
  688.     {
  689.         if ($encoding eq "ASCII")
  690.         {
  691.         $encoding=$gettext_code;
  692.         }
  693.         elsif ($gettext_code ne "ASCII")
  694.         {
  695.         # Only report once because the message is quite long
  696.         if (! $encoding_problem_is_reported)
  697.         {
  698.             print STDERR "WARNING: You should use the same file encoding for all your project files,\n".
  699.                  "         but $PROGRAM thinks that most of the source files are in\n".
  700.                  "         $encoding encoding, while \"$_\" is (likely) in\n".
  701.                         "         $gettext_code encoding. If you are sure that all translatable strings\n".
  702.                  "         are in same encoding (say UTF-8), please \e[1m*prepend*\e[0m the following\n".
  703.                  "         line to POTFILES.in:\n\n".
  704.                  "                 [encoding: UTF-8]\n\n".
  705.                  "         and make sure that configure.in/ac checks for $PACKAGE >= 0.27 .\n".
  706.                  "(such warning message will only be reported once.)\n";
  707.             $encoding_problem_is_reported = 1;
  708.         }
  709.         }
  710.     }
  711.     }
  712.  
  713.     close OUTFILE;
  714.     close INFILE;
  715.  
  716.     unlink "$MODULE.pot";
  717.     my @xgettext_argument=("$XGETTEXT",
  718.                "--add-comments",
  719.                "--directory\=\.",
  720.                "--output\=$MODULE\.pot",
  721.                "--files-from\=\.\/POTFILES\.in\.temp");
  722.     my $XGETTEXT_KEYWORDS = &FindPOTKeywords;
  723.     push @xgettext_argument, $XGETTEXT_KEYWORDS;
  724.     push @xgettext_argument, "--from-code\=$encoding" if ($gettext_support_nonascii);
  725.     push @xgettext_argument, $XGETTEXT_ARGS if $XGETTEXT_ARGS;
  726.     my $xgettext_command = join ' ', @xgettext_argument;
  727.  
  728.     # intercept xgettext error message
  729.     print "Running $xgettext_command\n" if $VERBOSE;
  730.     my $xgettext_error_msg = `$xgettext_command 2>\&1`;
  731.     my $command_failed = $?;
  732.  
  733.     unlink "POTFILES.in.temp";
  734.  
  735.     print "Removing generated header (.h) files..." if $VERBOSE;
  736.     unlink foreach (@temp_headers);
  737.     print "done.\n" if $VERBOSE;
  738.  
  739.     if (! $command_failed)
  740.     {
  741.     if (! -e "$MODULE.pot")
  742.     {
  743.         print "None of the files in POTFILES.in contain strings marked for translation.\n" if $VERBOSE;
  744.     }
  745.     else
  746.     {
  747.         print "Wrote $MODULE.pot\n" if $VERBOSE;
  748.     }
  749.     }
  750.     else
  751.     {
  752.     if ($xgettext_error_msg =~ /--from-code/)
  753.     {
  754.         # replace non-ASCII error message with a more useful one.
  755.         print STDERR "ERROR: xgettext failed to generate PO template file because there is non-ASCII\n".
  756.              "       string marked for translation. Please make sure that all strings marked\n".
  757.              "       for translation are in uniform encoding (say UTF-8), then \e[1m*prepend*\e[0m the\n".
  758.              "       following line to POTFILES.in and rerun $PROGRAM:\n\n".
  759.              "           [encoding: UTF-8]\n\n";
  760.     }
  761.     else
  762.     {
  763.         print STDERR "$xgettext_error_msg";
  764.         if (-e "$MODULE.pot")
  765.         {
  766.         # is this possible?
  767.         print STDERR "ERROR: xgettext failed but still managed to generate PO template file.\n".
  768.                  "       Please consult error message above if there is any.\n";
  769.         }
  770.         else
  771.         {
  772.         print STDERR "ERROR: xgettext failed to generate PO template file. Please consult\n".
  773.                  "       error message above if there is any.\n";
  774.         }
  775.     }
  776.     exit (1);
  777.     }
  778. }
  779.  
  780. sub POFile_Update
  781. {
  782.     -f "$MODULE.pot" or die "$PROGRAM: $MODULE.pot does not exist.\n";
  783.  
  784.     my $MSGMERGE = $ENV{"MSGMERGE"} || "/usr/bin/msgmerge";
  785.     my ($lang, $outfile) = @_;
  786.  
  787.     print "Merging $SRCDIR/$lang.po with $MODULE.pot..." if $VERBOSE;
  788.  
  789.     my $infile = "$SRCDIR/$lang.po";
  790.     $outfile = "$SRCDIR/$lang.po" if ($outfile eq "");
  791.  
  792.     # I think msgmerge won't overwrite old file if merge is not successful
  793.     system ("$MSGMERGE", "-o", $outfile, $infile, "$MODULE.pot");
  794. }
  795.  
  796. sub Console_WriteError_NotExisting
  797. {
  798.     my ($file) = @_;
  799.  
  800.     ## Report error if supplied language file is non-existing
  801.     print STDERR "$PROGRAM: $file does not exist!\n";
  802.     print STDERR "Try '$PROGRAM --help' for more information.\n";
  803.     exit;
  804. }
  805.  
  806. sub GatherPOFiles
  807. {
  808.     my @po_files = glob ("./*.po");
  809.  
  810.     @languages = map (&POFile_GetLanguage, @po_files);
  811.  
  812.     foreach my $lang (@languages) 
  813.     {
  814.     $po_files_by_lang{$lang} = shift (@po_files);
  815.     }
  816. }
  817.  
  818. sub POFile_GetLanguage ($)
  819. {
  820.     s/^(.*\/)?(.+)\.po$/$2/;
  821.     return $_;
  822. }
  823.  
  824. sub Console_Write_TranslationStatus
  825. {
  826.     my ($lang, $output_file) = @_;
  827.     my $MSGFMT = $ENV{"MSGFMT"} || "/usr/bin/msgfmt";
  828.  
  829.     $output_file = "$SRCDIR/$lang.po" if ($output_file eq "");
  830.  
  831.     system ("$MSGFMT", "-o", "$devnull", "--verbose", $output_file);
  832. }
  833.  
  834. sub Console_Write_CoverageReport
  835. {
  836.     my $MSGFMT = $ENV{"MSGFMT"} || "/usr/bin/msgfmt";
  837.  
  838.     &GatherPOFiles;
  839.  
  840.     foreach my $lang (@languages) 
  841.     {
  842.     print "$lang: ";
  843.     &POFile_Update ($lang, "");
  844.     }
  845.  
  846.     print "\n\n * Current translation support in $MODULE \n\n";
  847.  
  848.     foreach my $lang (@languages)
  849.     {
  850.     print "$lang: ";
  851.     system ("$MSGFMT", "-o", "$devnull", "--verbose", "$SRCDIR/$lang.po");
  852.     }
  853. }
  854.  
  855. sub SubstituteVariable
  856. {
  857.     my ($str) = @_;
  858.     
  859.     # always need to rewind file whenever it has been accessed
  860.     seek (CONF, 0, 0);
  861.  
  862.     # cache each variable. varhash is global to we can add
  863.     # variables elsewhere.
  864.     while (<CONF>)
  865.     {
  866.     if (/^(\w+)=(.*)$/)
  867.     {
  868.         ($varhash{$1} = $2) =~  s/^["'](.*)["']$/$1/;
  869.     }
  870.     }
  871.     
  872.     if ($str =~ /^(.*)\${?([A-Z_]+)}?(.*)$/)
  873.     {
  874.     my $rest = $3;
  875.     my $untouched = $1;
  876.     my $sub = $varhash{$2};
  877.     
  878.     return SubstituteVariable ("$untouched$sub$rest");
  879.     }
  880.     
  881.     # We're using Perl backticks ` and "echo -n" here in order to 
  882.     # expand any shell escapes (such as backticks themselves) in every variable
  883.     return echo_n ($str);
  884. }
  885.  
  886. sub CONF_Handle_Open
  887. {
  888.     my $base_dirname = getcwd();
  889.     $base_dirname =~ s@.*/@@;
  890.  
  891.     my ($conf_in, $src_dir);
  892.  
  893.     if ($base_dirname =~ /^po(-.+)?$/) 
  894.     {
  895.     if (-f "Makevars") 
  896.     {
  897.         my $makefile_source;
  898.  
  899.         local (*IN);
  900.         open (IN, "<Makevars") || die "can't open Makevars: $!";
  901.  
  902.         while (<IN>) 
  903.         {
  904.         if (/^top_builddir[ \t]*=/) 
  905.         {
  906.             $src_dir = $_;
  907.             $src_dir =~ s/^top_builddir[ \t]*=[ \t]*([^ \t\n\r]*)/$1/;
  908.  
  909.             chomp $src_dir;
  910.                     if (-f "$src_dir" . "/configure.ac") {
  911.                         $conf_in = "$src_dir" . "/configure.ac" . "\n";
  912.                     } else {
  913.                         $conf_in = "$src_dir" . "/configure.in" . "\n";
  914.                     }
  915.             last;
  916.         }
  917.         }
  918.         close IN;
  919.  
  920.         $conf_in || die "Cannot find top_builddir in Makevars.";
  921.     }
  922.     elsif (-f "../configure.ac") 
  923.     {
  924.         $conf_in = "../configure.ac";
  925.     } 
  926.     elsif (-f "../configure.in") 
  927.     {
  928.         $conf_in = "../configure.in";
  929.     } 
  930.     else 
  931.     {
  932.         my $makefile_source;
  933.  
  934.         local (*IN);
  935.         open (IN, "<Makefile") || return;
  936.  
  937.         while (<IN>) 
  938.         {
  939.         if (/^top_srcdir[ \t]*=/) 
  940.         {
  941.             $src_dir = $_;            
  942.             $src_dir =~ s/^top_srcdir[ \t]*=[ \t]*([^ \t\n\r]*)/$1/;
  943.  
  944.             chomp $src_dir;
  945.             $conf_in = "$src_dir" . "/configure.in" . "\n";
  946.  
  947.             last;
  948.         }
  949.         }
  950.         close IN;
  951.  
  952.         $conf_in || die "Cannot find top_srcdir in Makefile.";
  953.     }
  954.  
  955.     open (CONF, "<$conf_in");
  956.     }
  957.     else
  958.     {
  959.     print STDERR "$PROGRAM: Unable to proceed.\n" .
  960.              "Make sure to run this script inside the po directory.\n";
  961.     exit;
  962.     }
  963. }
  964.  
  965. sub FindPackageName
  966. {
  967.     my $version;
  968.     my $domain = &FindMakevarsDomain;
  969.     my $name = $domain || "untitled";
  970.  
  971.     &CONF_Handle_Open;
  972.  
  973.     my $conf_source; {
  974.     local (*IN);
  975.     open (IN, "<&CONF") || return $name;
  976.     seek (IN, 0, 0);
  977.     local $/; # slurp mode
  978.     $conf_source = <IN>;
  979.     close IN;
  980.     }
  981.  
  982.     # priority for getting package name:
  983.     # 1. GETTEXT_PACKAGE
  984.     # 2. first argument of AC_INIT (with >= 2 arguments)
  985.     # 3. first argument of AM_INIT_AUTOMAKE (with >= 2 argument)
  986.  
  987.     # /^AM_INIT_AUTOMAKE\([\s\[]*([^,\)\s\]]+)/m 
  988.     # the \s makes this not work, why?
  989.     if ($conf_source =~ /^AM_INIT_AUTOMAKE\(([^,\)]+),([^,\)]+)/m)
  990.     {
  991.     ($name, $version) = ($1, $2);
  992.     $name    =~ s/[\[\]\s]//g;
  993.     $version =~ s/[\[\]\s]//g;
  994.     $varhash{"AC_PACKAGE_NAME"} = $name;
  995.     $varhash{"PACKAGE"} = $name;
  996.     $varhash{"AC_PACKAGE_VERSION"} = $version;
  997.     $varhash{"VERSION"} = $version;
  998.     }
  999.     
  1000.     if ($conf_source =~ /^AC_INIT\(([^,\)]+),([^,\)]+)/m) 
  1001.     {
  1002.     ($name, $version) = ($1, $2);
  1003.     $name    =~ s/[\[\]\s]//g;
  1004.     $version =~ s/[\[\]\s]//g;
  1005.     $varhash{"AC_PACKAGE_NAME"} = $name;
  1006.     $varhash{"PACKAGE"} = $name;
  1007.     $varhash{"AC_PACKAGE_VERSION"} = $version;
  1008.     $varhash{"VERSION"} = $version;
  1009.     }
  1010.  
  1011.     # \s makes this not work, why?
  1012.     $name = $1 if $conf_source =~ /^GETTEXT_PACKAGE=\[?([^\n\]]+)/m;
  1013.     
  1014.     # prepend '$' to auto* internal variables, usually they are
  1015.     # used in configure.in/ac without the '$'
  1016.     $name =~ s/AC_/\$AC_/g;
  1017.     $name =~ s/\$\$/\$/g;
  1018.  
  1019.     $name = $domain if $domain;
  1020.  
  1021.     $name = SubstituteVariable ($name);
  1022.     $name =~ s/^["'](.*)["']$/$1/;
  1023.  
  1024.     return $name if $name;
  1025. }
  1026.  
  1027.  
  1028. sub FindPOTKeywords
  1029. {
  1030.  
  1031.     my $keywords = "--keyword\=\_ --keyword\=N\_ --keyword\=U\_ --keyword\=Q\_";
  1032.     my $varname = "XGETTEXT_OPTIONS";
  1033.     my $make_source; {
  1034.     local (*IN);
  1035.     open (IN, "<Makevars") || (open(IN, "<Makefile.in.in") && ($varname = "XGETTEXT_KEYWORDS")) || return $keywords;
  1036.     seek (IN, 0, 0);
  1037.     local $/; # slurp mode
  1038.     $make_source = <IN>;
  1039.     close IN;
  1040.     }
  1041.  
  1042.     $keywords = $1 if $make_source =~ /^$varname[ ]*=\[?([^\n\]]+)/m;
  1043.     
  1044.     return $keywords;
  1045. }
  1046.  
  1047. sub FindMakevarsDomain
  1048. {
  1049.  
  1050.     my $domain = "";
  1051.     my $makevars_source; { 
  1052.     local (*IN);
  1053.     open (IN, "<Makevars") || return $domain;
  1054.     seek (IN, 0, 0);
  1055.     local $/; # slurp mode
  1056.     $makevars_source = <IN>;
  1057.     close IN;
  1058.     }
  1059.  
  1060.     $domain = $1 if $makevars_source =~ /^DOMAIN[ ]*=\[?([^\n\]\$]+)/m;
  1061.     $domain =~ s/^\s+//;
  1062.     $domain =~ s/\s+$//;
  1063.     
  1064.     return $domain;
  1065. }
  1066.